决策树（decision tree）是一类常见的机器学习方法，目的是为了产生一棵泛化能力强，即处理未见示例能力强的决策树。 决策树的生成是一个递归的过程。在决策树的基本算法中，有三种情况会导致递归返 ...

1. 决策树基本知识 决策树就是通过一系列规则对数据进行分类的一种算法，可以分为分类树和回归树两类，分类树处理离散变量的，回归树是处理连续变量。 样本一般都有很多个特征，有的特征对分类起很大的作用 ...

开头语：这一系列的笔记仍然致力于简洁 + 尽量能说清楚怎么回事。为了理解GBDT和XGBoost，从最基础的决策树开始，一步一步，手把手深入到GBDT和XGBoost。 一段发自肺腑感谢的话：非常感 ...